资讯频道 → 数据库
阅读更多

5顶
0踩

数据库

原创新闻 Manhattan：Twitter的下一代分布式数据库

2014-04-03 11:17 by 副主编 wangguo 评论(2) 有10215人浏览
Twitter Manhattan 分布式 数据库

声明：ITeye资讯文章的版权属于ITeye网站所有，严禁任何网站转载本文，否则必将追究法律责任！

作为世界上使用最广泛的微博客服务，Twitter月活跃用户如今已经达到了2.183亿人，每天大约有5亿条推文被发送，几乎每秒钟就产生了超过6000条推文。

在最初Twitter还没有这么大数据量的时候，该公司主要使用一些主流的技术来处理这些数据，比如开源数据库MySQL和Cassandra等，但随着用户量的飞速扩增，这些技术逐渐显示出了一些瓶颈，已经达不到Twitter实时、低延迟的需求，Twitter工程师也需要花费大量的时间来扩展这些产品。因此，基于目前需求及长远考虑，Twitter开发了自己的分布式数据库系统——Manhattan。

Twitter表示，未来该系统可能会开源，该公司还在在官方博客中介绍了该系统的详细信息。下面就来看看。

Twitter目前对于数据库产品的需求（也是Manhattan的特性）：

  • 可靠性
  • 可用性
  • 可扩展性
  • 易操作性
  • 低延迟
  • 细粒度的可缩放性
  • 开发人员的工作效率
Twitter在设计Manhattan时主要遵循的原则：

  • 保持核心轻量和简单
  • 能够更快地带来价值
  • 有限考虑多租户、服务质量（QoS）和自助服务
  • 专注于可预测性
  • 存储作为服务，而不仅仅是技术
下面来看看Manhattan的主要特性。Manhattan共分为如下4层：



  • 核心：这是存储系统最关键的部分，需要高度稳定和强大，用来处理异常、一致性、路由、拓扑管理、数据中心区域内/跨区域复制、冲突解决等。核心中的关键组件完全可插拔。
  • 存储引擎：目前有3个内部存储引擎——seadb、sstable、btree
  • 存储服务：在核心基础上构建了更多传统数据库中包含的一些功能，比如：Hadoop数据批量导入、强一致性服务、时间序列计数器服务
  • 接口：用于实现客户与存储系统的交互


更多信息：Manhattan, our real-time, multi-tenant distributed database for Twitter scale
  • 大小: 10.2 KB
  • 大小: 50.9 KB
5
顶
0
踩
评论 共 2 条 请登录后发表评论
2 楼 sp42 2014-04-08 22:00
开源否？Twitter 出品的关注下
1 楼 zhangbaoqi 2014-04-07 17:02

发表评论

您还没有登录,请您登录后再发表评论

相关推荐

  • java呼叫中心系统源码-FISH-UCKeFu:基于UCKeFu

    java呼叫中心系统源码 优客服 优客服，是一个多渠道融合的客户支持服务平台，包含WebIM，微信，电话，邮件，短信等接入渠道、智能机器人 ...本项目有四个依赖包，jave 和Mondrian，aliyun-java-sdk-cor

  • 网络编程资源大集合(包含前端、java、linux、安卓、github开源项目、开发工具等)

    安卓各组件介绍一、ListView二、ActionBar三、Menu四、ViewPager 、Gallery五、GridView六、ImageView七、ProgressBar八、其他2.GitHub上优秀Android开源项目3. Android开发神器1.Xabber客户端2.oschina客户端3.手机...

  • 【java毕业设计】基于javaEE+SSM+MySql的BS架构微博系统设计与实现（毕业论文+程序源码）——BS架构微博系统

    大家好，今天给大家介绍基于javaEE+SSM+MySql的BS架构微博系统设计与实现，文章末尾附有本毕业设计的论文和源码下载地址哦。文章目录： 项目难度：中等难度 适用场景：相关题目的毕业设计 配套论文字数：28461个字77...

  • GitHub 优秀的 Android 开源项目

    android-pulltorefresh 一个强大的拉动刷新开源项目，支持各种控件下拉刷新 ListView、ViewPager、WevView、ExpandableListView、GridView、(Horizontal )ScrollView、Fragment上下左右拉动刷新，比下面...

  • 最常用的GitHub—— Android 开源项目整理（精品）

    android-pulltorefresh 一个强大的拉动刷新开源项目，支持各种控件下拉刷新 ListView、ViewPager、WevView、ExpandableListView、GridView、(Horizontal )ScrollView、Fragment上下左右拉动刷新，比下面...

  • 暴力拒绝白嫖，著名开源项目作者删库跑路！神秘Bug影响超2万个项目，亚马逊云也躺枪...

    据火线安全不完全统计，仅在Github上，就有60644个开源项目发布的321094软件包存在风险，这一漏洞可以说是影响了互联网上70%以上企业系统的正常运转。 由于Java应用程序通常会记录各种各样的事件，例如用户发送和...

  • 开源项目总结帖（整理自Trinea的github）

    android-pulltorefresh 一个强大的拉动刷新开源项目，支持各种控件下拉刷新 ListView、ViewPager、WevView、ExpandableListView、GridView、(Horizontal )ScrollView、Fragment上下左右拉动刷新，比下面...

  • GitHub 优秀的 Android 开源项目和框架

    GitHub 优秀的 Android 开源项目 淘宝技术牛p博客整理开发中最常用的GitHub上 优秀的 Android 开源项目整理（精品） 博客分类：  Android 开源集合   本文章已收录于： Git 原文地址为...

  • 转 【Android 应用开发】GitHub 优秀的 Android 开源项目

    android-pulltorefresh 一个强大的拉动刷新开源项目，支持各种控件下拉刷新 ListView、ViewPager、WevView、ExpandableListView、GridView、(Horizontal )ScrollView、Fragment上下左右拉动刷新，比下面...

  • 【Android 应用开发】GitHub 优秀的 Android 开源项目

    android-pulltorefresh 一个强大的拉动刷新开源项目，支持各种控件下拉刷新 ListView、ViewPager、WevView、ExpandableListView、GridView、(Horizontal )ScrollView、Fragment上下左右拉动刷新，比下面...

  • GitHub 优秀的 Android 开源项目(值得研究)

    android-pulltorefresh 一个强大的拉动刷新开源项目，支持各种控件下拉刷新 ListView、ViewPager、WevView、ExpandableListView、GridView、(Horizontal )ScrollView、Fragment上下左右拉动刷新，比下面...

  • 别瞎搞了！微博、知乎就是这么设计Feed流系统的~

    点击上方好好学java，选择星标公众号 重磅资讯，干货，第一时间送达 今日推荐：14 个 github 项目！个人原创100W +访问量博客：点击前往，查看更多 # 简介差不多...

  • 淦！女票问我能不能开发一个微信朋友圈、微博？

    点击上方“芋道源码”，选择“设为星标”管她前浪，还是后浪？能浪的浪，才是好浪！每天 8:55 更新文章，每天掉亿点点头发...源码精品专栏原创 | Java 2020 超神之路，很肝~...

  • 618商品网页制作编程示例开发案列优质学习资料资源工具与案列应用场景开发文档教程资料.txt

    618商品网页制作编程示例开发案列优质学习资料资源工具与案列应用场景开发文档教程资料

  • 329_沁心茶叶商城小程序的设计与实现-源码.zip

    提供的源码资源涵盖了安卓应用、小程序、Python应用和Java应用等多个领域，每个领域都包含了丰富的实例和项目。这些源码都是基于各自平台的最新技术和标准编写，确保了在对应环境下能够无缝运行。同时，源码中配备了详细的注释和文档，帮助用户快速理解代码结构和实现逻辑。 适用人群： 这些源码资源特别适合大学生群体。无论你是计算机相关专业的学生，还是对其他领域编程感兴趣的学生，这些资源都能为你提供宝贵的学习和实践机会。通过学习和运行这些源码，你可以掌握各平台开发的基础知识，提升编程能力和项目实战经验。 使用场景及目标： 在学习阶段，你可以利用这些源码资源进行课程实践、课外项目或毕业设计。通过分析和运行源码，你将深入了解各平台开发的技术细节和最佳实践，逐步培养起自己的项目开发和问题解决能力。此外，在求职或创业过程中，具备跨平台开发能力的大学生将更具竞争力。 其他说明： 为了确保源码资源的可运行性和易用性，特别注意了以下几点：首先，每份源码都提供了详细的运行环境和依赖说明，确保用户能够轻松搭建起开发环境；其次，源码中的注释和文档都非常完善，方便用户快速上手和理解代码；最后，我会定期更新这些源码资源，以适应各平台技术的最新发展和市场需求。

  • 250_基于微信小程序的物流运输(仓储)系统开发与设计-源码.zip

    提供的源码资源涵盖了安卓应用、小程序、Python应用和Java应用等多个领域，每个领域都包含了丰富的实例和项目。这些源码都是基于各自平台的最新技术和标准编写，确保了在对应环境下能够无缝运行。同时，源码中配备了详细的注释和文档，帮助用户快速理解代码结构和实现逻辑。 适用人群： 这些源码资源特别适合大学生群体。无论你是计算机相关专业的学生，还是对其他领域编程感兴趣的学生，这些资源都能为你提供宝贵的学习和实践机会。通过学习和运行这些源码，你可以掌握各平台开发的基础知识，提升编程能力和项目实战经验。 使用场景及目标： 在学习阶段，你可以利用这些源码资源进行课程实践、课外项目或毕业设计。通过分析和运行源码，你将深入了解各平台开发的技术细节和最佳实践，逐步培养起自己的项目开发和问题解决能力。此外，在求职或创业过程中，具备跨平台开发能力的大学生将更具竞争力。 其他说明： 为了确保源码资源的可运行性和易用性，特别注意了以下几点：首先，每份源码都提供了详细的运行环境和依赖说明，确保用户能够轻松搭建起开发环境；其次，源码中的注释和文档都非常完善，方便用户快速上手和理解代码；最后，我会定期更新这些源码资源，以适应各平台技术的最新发展和市场需求。

  • 基于卡尔曼估计温湿度的MATLAB程序-带交互-真实值可自己输入

    背景：一维卡尔曼滤波的MATLAB例程，​背景为温度估计。 代码介绍：运行程序后，可以自己输入温度真实值 滤波前的值和滤波后的值分别于期望值（真实值）作差，可以得到​误差​曲线图 更多介绍：https://blog.csdn.net/callmeup/article/details/139374191

  • tensorflow-gpu-2.9.1-cp310-cp310-win-amd64.whl

    数仓建模

  • 404_智能手机图片管理-源码.zip

    提供的源码资源涵盖了安卓应用、小程序、Python应用和Java应用等多个领域，每个领域都包含了丰富的实例和项目。这些源码都是基于各自平台的最新技术和标准编写，确保了在对应环境下能够无缝运行。同时，源码中配备了详细的注释和文档，帮助用户快速理解代码结构和实现逻辑。 适用人群： 这些源码资源特别适合大学生群体。无论你是计算机相关专业的学生，还是对其他领域编程感兴趣的学生，这些资源都能为你提供宝贵的学习和实践机会。通过学习和运行这些源码，你可以掌握各平台开发的基础知识，提升编程能力和项目实战经验。 使用场景及目标： 在学习阶段，你可以利用这些源码资源进行课程实践、课外项目或毕业设计。通过分析和运行源码，你将深入了解各平台开发的技术细节和最佳实践，逐步培养起自己的项目开发和问题解决能力。此外，在求职或创业过程中，具备跨平台开发能力的大学生将更具竞争力。 其他说明： 为了确保源码资源的可运行性和易用性，特别注意了以下几点：首先，每份源码都提供了详细的运行环境和依赖说明，确保用户能够轻松搭建起开发环境；其次，源码中的注释和文档都非常完善，方便用户快速上手和理解代码；最后，我会定期更新这些源码资源，以适应各平台技术的最新发展和市场需求。

  • 338_社团管理小程序-源码.zip

    提供的源码资源涵盖了安卓应用、小程序、Python应用和Java应用等多个领域，每个领域都包含了丰富的实例和项目。这些源码都是基于各自平台的最新技术和标准编写，确保了在对应环境下能够无缝运行。同时，源码中配备了详细的注释和文档，帮助用户快速理解代码结构和实现逻辑。 适用人群： 这些源码资源特别适合大学生群体。无论你是计算机相关专业的学生，还是对其他领域编程感兴趣的学生，这些资源都能为你提供宝贵的学习和实践机会。通过学习和运行这些源码，你可以掌握各平台开发的基础知识，提升编程能力和项目实战经验。 使用场景及目标： 在学习阶段，你可以利用这些源码资源进行课程实践、课外项目或毕业设计。通过分析和运行源码，你将深入了解各平台开发的技术细节和最佳实践，逐步培养起自己的项目开发和问题解决能力。此外，在求职或创业过程中，具备跨平台开发能力的大学生将更具竞争力。 其他说明： 为了确保源码资源的可运行性和易用性，特别注意了以下几点：首先，每份源码都提供了详细的运行环境和依赖说明，确保用户能够轻松搭建起开发环境；其次，源码中的注释和文档都非常完善，方便用户快速上手和理解代码；最后，我会定期更新这些源码资源，以适应各平台技术的最新发展和市场需求。

Global site tag (gtag.js) - Google Analytics